SpeakerMem-R1: Speaker-Centered Dual-Track Memory for Multi-Party Dialogue
SpeakerMem-R1:面向多方对话的以说话人为中心双轨记忆
🧭 多方对话长期记忆 · 双轨记忆与RL训练
State Key Lab of CAD&CG, Zhejiang University
双轨记忆+RL训练Writer-R1,解决多方对话长期记忆的消息归属与关系理解瓶颈
📌 工作参考价值(4 点)
- 双轨记忆可迁移到电商多方会话场景:售后群聊、直播互动、多人协作等场景中,用户与客服/主播/其他买家发言交错,现有记忆系统易丢失人物关系和观点归属;借鉴 SpeakerMem-R1 的 verbatim track + structured track,将原始消息与提取出的 person-level/group-level 状态分开存储,查询时按 entity/event/time 融合,能显著提升关系类问题的回答质量。
- 用小模型做结构化记忆写入更贴合生产环境:论文训练 Writer-R1 负责从对话中抽取说话人归属和状态更新,而非直接调用超大模型做长时间维度的记忆管理;电商客服/Agent 团队可以对自有会话数据做 SFT+GRPO,训练一个轻量记忆写入器,降低 API 成本和延迟,同时满足数据隐私要求。
- speaker-conditioned GRPO 可用于归属纠错:将说话人信息作为奖励条件,结合 SpeakerLevenshtein 惩罚归属错误,比单纯 SFT 更能提升消息归属准确率(控制实验中 57.38%→68.20%);在训练自己的对话总结或状态抽取模型时,可借鉴这种领域可验证的 RL 奖励设计。
- person-level 与 group-level views 互补:对电商推荐中的用户画像建模有启示——同时维护个体兴趣状态和群体共享状态,避免只关注个人历史而丢失群组上下文(如家庭采购群、企业采购团队)。